hadoop相关论文
2019年11月27日,全国携号转网服务正式启动,这意味着全国范围内满足条件的用户可以在不更改号码的情况下随意选择运营商。随着电信......
随着中国国家铁路集团有限公司货运组织改革的不断深化,对于货运业务产生的大量数据,利用传统的数据库技术只能获取有限的信息,不能够......
随着大数据技术的不断发展与广泛应用,传统的数据安全技术受到了诸多挑战。本研究立足大数据安全技术,阐述了大数据环境下数据安全面......
随着科技水平和人民生活质量的提高,人们对自身健康尤为重视。医疗信息化的快速发展,以及惠及全民的健康信息服务和智慧医疗服务的......
针对当前水面舰艇编队海量原始信息难以有效转变成作战决策所需情报的问题,基于大数据的分布式存储和分布式计算技术,分析了大数据条......
互联网技术的迅猛发展,使得互联网用户生产和面临的数据不断增加,从而使得人们面临“信息海洋”的困境。因此推荐系统应运而生,成......
互联网时代下,网络舆情监控已经成为维护社会稳定的重要途径,需采取关键字监控方式,建立监控系统。文章以系统需求为切入点,设计了......
开源镜像站是一个放置开源系统镜像文件的站点,免费提供镜像文件和一些常用软件包下载。构建校园网内部的开源软件镜像站点,能更好地......
目前,网购交易的日益增加使得电商数据量呈现疯狂增长的态势,数据量的大增需要引入数据仓库,用以支持对大容量数据的分析和处理。在数......
针对西南岩溶山区滑坡监测数据量大、类型多、来源杂、集成与分析难等问题,基于Hadoop进行数据的存储与计算,并应用WebGIS等关键核心......
文章通过设计高校图书馆智慧服务大数据分析系统,解决高校图书馆数据与业务应用的决策断层问题。该系统对业务数据可做多维度灵活分......
本文针对如何快速进行处理HBase表中数据的问题,提出了使用MapReduce并行处理HBase表中数据的关键技术,可利用集群资源,达到快速批......
随着信息时代的到来和计算机技术的发展,各行各业的数据呈指数型增长。同时,大数据的快速发展在无时无刻影响着人们的生活。而对大数......
基于Hadoop+MPP大数据技术构建城市轨道交通线网数据中心具有明显的优势。不仅具有PB级的海量存储容量,支持多源异构数据接入,而且具......
为了提升信息加密密钥敏感性以及加密加速比,提出基于大数据技术的智慧后勤信息动态加密方法.基于分层规划理念构建智慧后勤信息化......
为了提高用户获取图书的效率、优化阅读体验,文中对基于用户行为与内容的相关推荐算法进行了研究,引入Hadoop大数据处理框架,设计并实......
随着大数据技术不断发展,各行业的信息智能化程度越来越高,也对旅游酒店业产生了很大影响。各大旅游平台积累了大量的城市酒店基本......
为落实智慧民航发展主线,驱动行业高质量发展,充分发挥民航行业数据价值,大数据技术不断地被综合运用于“智慧机场”的建设中。文章通......
通过Python爬虫技术获取网站海量数据,使用分布式系统架构Hadoop与并行计算模型MapReduce,建立大数据计算分析平台。应用该方法,以住......
HDFS是Hadoop中一个高容错性的框架,其核心功能是进行数据的分布式存储,它一般被部署在廉价的机器上,提供高吞吐量来访问程序的数......
随着太空领域研究和大数据技术的发展,空间环境数据持续大规模增长。如何利用、分析及整合这些数据成为当前太空战场环境分析技术......
For the efficiency of image processing in traditional single-machine environment is low, and the image processing used H......
结合工业大数据的特点,构建基于Hadoop的工业物联网大数据平台,对数据进行预处理、存储和分析计算,并应用于智慧工厂中。结合Mind Sph......
Hadoop是当前最流行的大数据处理框架,是对大数据储存和处理的开源分布式计算平台,呈现出较高的安全稳定性、高效性、可扩展性,同时成......
信息化时代的到来,方便了人们对于信息的获取,但同时也带来了一些问题:过载的信息超出了人们所能处理的范围从而导致无法准确得到......
针对海量瓦片数据具有单个文件小、文件数量多、整体占用空间大、不易管理维护等问题,通过对地图瓦片生成原理、地图瓦片NoSQL数据......
期刊
由于大数据的发展,取证对象的变化给取证工作带来了极大的挑战。针对此问题,首先对电子数据取证技术进行了基础介绍,通过对大数据框架......
本文旨在构建一个飞行训练大数据资源池,用来解决训练飞行数据分散、数据存取困难等问题。飞参数据作为一个检测飞行异常和提高飞......
本文基于大数据技术,采用Hadoop平台、Eclipse开发环境、Java语言通过对数据的提取、数据清洗、数据分析等实现高考填报系统推荐系......
随着互联网的快速发展,各行各业都在不断引入新的信息技术,在大数据环境下如何通过信息化技术推测顾客对菜品、口味的偏好,并向顾客智......
大数据是指巨大的数据集,具有速度高、结构复杂、体积大、种类多以及管理分析、存储、传输等特点。基于大数据的特点,本文主要介绍......
近年来,随着我国网络信息技术的快速发展,个性化推荐系统的应用范围也越来越广,为人们的工作和生活也带来了很多的便捷。许多公司都开......
学生行为数据能够全面、系统地反映大学生的行为规律和特征,对高校教育管理、学生自身发展具有重要的意义。面对海量的校园数据,如何......
大数据、云计算技术的迅猛发展为挖掘气象数据丰富的科研和经济价值提供了技术支撑,促进了Hadoop及其包含的文件存储系统(HDFS,Hadoop......
从硬件到软件,各种高科技技术日新月异,手机的功能也变得越来越强大,从多年前仅仅只是单一的打电话、发短信功能,到如今的影音试听......
随着互联网、个人移动终端、网络自媒体的发展,网络数据日益增长,自然语言处理领域也面临着处理海量数据的问题。由于受到存储和计......
船舶智能化是未来一种发展趋势,其中水面无人艇已成为国内外研究热点。面对多样化的海洋作业任务和复杂的海洋环境,相较于单无人艇......
人脸识别是计算机视觉和人工智能领域最重要的研究方向之一。随着大数据时代的逐步到来,各大媒体数据有了井喷式的增加,人脸识别的......
随着互联网的普及和技术的快速发展,“网购”已经成为了人们的生活常态,电子商务行业得到了蓬勃发展,同时也带动物流的崛起;物流作......
随着互联网金融行业的快速发展,众多银行与互联网企业均推出了在线信贷系统。不同于传统的线下信贷,在线信贷业务用户群体庞大且交......
针对城市安全问题,为实现视频监控的可信预警、辨别潜在的突发事件并及时处理,基于Hadoop搭建了身份识别应急联防移动处置平台,采......
目前工业企业对于如何利用现有数据推动数字化转型,提升业务效率并没有十分明确的思路。针对这种现象,探索工业大数据的采集、分析......
伴随着信息技术以及各种互联网企业的迅猛发展,面对爆炸的数据以及种类繁多的新业务,传统老旧的运维方式已经不能满足一个大型企业......
大数据是网络信息时代的客观存在,其产生的意义在于对数据进行专业存储和处理,并从中挖掘和提取所需要的知识和信息。Hadoop作为数......
传统的单机网络爬虫技术滞后于海量网页数据的应用场景,存在诸多的缺陷,但Hadoop、Spark等大数据分布式技术可以高效地存储和计算......
本文基于云计算技术构建一款电子政务系统,首先阐述系统总体设计框架,其次介绍了公文管理、党建管理、会议管理等系统模块的设计思......